مجموعه عمارت و باغ خسروآباد افزون بر دو بخش اصلی، یعنی قصر سلطنتی با ورودی ستون دار، باغ خسروآباد نیز از اهمیت خاصی برخوردار بوده‌است این باغ که بوسیله ۴ خیابان روبرو و اطراف عمارت خسروآباد عملاً به ۴ باغ خسرو آباد تبدیل شده بود و اطراف آن بوسیله ۴ خندق در طرفین باغ و کاخ خسروآباد با انواع درختان مختلف احاطه شده جلوه خاصی را به این مجموعه داده است.